Longitudinal evaluation of the Ophthalmology residents in Brazil: an observational prospective study

ABSTRACT BACKGROUND: The longitudinal evaluation of students seems to be a better way to assess their knowledge compared with that of the traditional methods of evaluation, such as modular and final tests. Currently, progress testing is the most consolidated type of longitudinal testing method. However, despite being well consolidated as an assessment tool in medical education, the use of this type of test in residency programs is scarce. OBJECTIVES: This study aimed to investigate residents' knowledge growth regarding residency training and to describe the implementation of a longitudinal evaluation test in ophthalmological residency training across several medical schools in Brazil. Finally, the study aimed to check whether performance in the tests can be used as a predictor of the results of the specialist title test. DESIGN AND SETTING: This was a prospective observational study. This study was conducted using an online platform. METHODS: Online tests were developed following the same pattern as the Brazilian Ophthalmology Council specialist tests. All the residents performed the test simultaneously. The tests were conducted once a year at the end of the school year. RESULTS: A progress test was conducted across 13 services with 259 residents. Our results demonstrated that resident scores improved over the years (P < 0.0001) and had a moderate correlation with the Brazilian Opthalmology Council specialist test (P = 0.0156). CONCLUSION: The progress test can be considered a valuable tool to assess knowledge, meaning their knowledge increased over residency training. In addition, it can be used as a predictor of the result in the specialist title test.

Satisfaction of the ophthalmology residents with online progress test / Satisfação dos residentes de oftalmologia com testes de progresso online

ABSTRACT Objective To investigate if there is knowledge improvement over the Residency years, as well as students' satisfaction about progress test. Finally, to describe the implementation of the online progress test in some Ophthalmological Residency programs in Brazil. Methods It was an observational cross-section study. The participants were all Ophthalmology residents who accepted to join the study. They did an online test and answered demographic and satisfaction questionnaires. Results Two hundred and fifty-nine residents joined the study. 42,86% of the residents answered the demographic questionnaire and 6,95% answered the satisfaction questionnaire. In general, the residents approved the website as a tool for self-learning and to improve residency programs. Conclusion Over the years, the residents acquired knowledge during the residency program. In general, residents were satisfied with the test. The implementation of the online progress test system in the Ophthalmological Residency schools in Brazil was successful.

RESUMO Objetivo Avaliar se ocorre melhora do desempenho na prova dos residentes ao longo dos anos de curso e o grau de satisfação dos residentes com o teste de progresso. Além disso, descrever a implementação do teste de progresso em alguns serviços de residência em oftalmologia no Brasil. Métodos Estudo observacional prospectivo. Os participantes foram todos os residentes de Oftalmologia que aceitaram participar do estudo. Eles fizeram um teste online e responderam a um questionário pessoal e um de satisfação. Resultados Duzentos e cinquenta e nove residentes participaram do estudo. 42,86% dos residentes responderam o questionário pessoal e 6,95% responderam o questionário de satisfação. Em geral, os residentes aprovaram o site como instrumento de autoaprendizado e como instrumento para melhoria dos programas de residência. Conclusão Houve aquisição de conhecimento dos residentes ao longo do curso. De um modo geral, os residentes ficaram satisfeitos com o teste. A implementação do teste de progresso nos serviços de residência de Oftalmologia foi bem-sucedida.

Application of telesimulation in a medical undergraduate course during the SARS-CoV-2 pandemic: a quantitative and retrospective study

ABSTRACT BACKGROUND: Because of the social isolation and distancing measures that were imposed to stop the spread of coronavirus disease 19 (COVID-19), new ways of teaching were implemented. OBJECTIVES: To describe the implementation of telesimulation and seek to assess students' perceptions regarding telesimulation. DESIGN AND SETTING: Retrospective quantitative study conducted within the hospital simulation at a private medical school in São Paulo, Brazil. METHODS: After telesimulation training, students answered a questionnaire that provided an overall assessment of this activity, self-assessment and assessments of the facilitators and infrastructure provided by the University. RESULTS: Among the students, 50% reported that the activity was below expectations and 45% reported that it was in line with their expectations. The strong points of the activity were the clinical cases, workload and teachers. The main challenge was students' difficulty in reflecting on their learning and the infrastructure. CONCLUSIONS: Since students have less experience and fewer clinical encounters than residents or professionals, they also face more difficulty. Although telesimulation may have provided a valid alternative to replace simulation training during the COVID-19 pandemic, more face-to-face activities should be offered to students, when possible.

Implementing healthcare professionals' training during COVID-19: a pre and post-test design for simulation training

ABSTRACT BACKGROUND: Coronavirus disease-19 (COVID-19) has imposed a new reality that presents several challenges for healthcare professionals. The main challenge has been the lack of proper training in relation to an unknown disease. OBJECTIVE: To investigate healthcare professionals' acquisition of knowledge of a new airway management protocol for COVID-19 through their participation in simulation training. DESIGN AND SETTING: Pre and post-test study with purpose sampling, carried out in a tertiary-level hospital in the city of Campinas, state of São Paulo, Brazil. METHODS: This was a cross-sectional pre and post-test intervention among healthcare professionals working in the intensive care unit and emergency department of a large hospital. The training was carried out using an in situ simulation scenario and the participants answered pre and post-tests consisting of a 20-item questionnaire about the new protocol. RESULTS: The paired-sample t test demonstrated that there was a significant increase in test score (t = −19.06; P < 0.001), from before the training (M = 8.62; standard deviation, SD = 3.53) to after the simulation training (M = 17.02; SD = 1.76). CONCLUSIONS: The simulated training had a positive impact on the healthcare professionals' acquisition of the COVID-19 protocol. We also demonstrated that in situ simulation training was an efficient tool for implementing new protocols, thus bringing benefits to healthcare systems, professionals and patients.

Training in healthcare during and after COVID-19: proposal for simulation training

SUMMARY INTRODUCTION: The challenge of facing COVID-19 falls under all health care structures, and without specific training to health care professionals they are probably the professionals with the highest level of exposure. Regardless of the level of health care, the training of professionals aims to optimize resources and attend patients while assuring quality and security. POINT OF VIEW: This report proposes simulation training for health care professionals to update professionals for attending patients during the pandemic. This training was built with five simulated stations, considering different stages of a patient with COVID-19. This report takes advantage of different simulation techniques, such as skills training, standardized patient, medium- and high-fidelity simulator, rapid cycle of deliberate practice, and in situ simulation. DISCUSSION: Medical procedures for COVID-19 patients offer additional risk for health care professionals, especially considering exposure to procedures that generate aerosols, such as compression, mask ventilation, and orotracheal intubation. Thus, finding educational strategies that allow training is essential to simulate the evolution of COVID-19 patients in a safe manner. CONCLUSION: Simulation has proven to be a useful and effective form of training around the world for training health teams on the front lines for patient care in COVID-19.

The challenge of understanding, evaluating and providing feedback on regulation during group learning / O desafio em entender, avaliar e fornecer feedback em regulação durante aprendizagem em grupo

Learning in groups is commonly used in academic and clinical health professions education (HPE). There is growing recognition that regulation during learning is essential for both the individual learner and group learning. The authors in this article propose a practical approach for understanding, evaluating and providing feedback on regulation during group learning. The approach is informed by previous studies conducted in other areas of education. Three varieties of regulation during group learning are discussed: individual, co-regulation and shared regulation. Each variety of regulation has a focus on three essential activities during group learning: task, social and motivation. Illustrative scenarios are presented to describe how the approach can be practically used in HPE. The specific and additional focus on regulation can enhance current approaches for providing feedback on group learning and the authors discuss recommendations for practical implementation and future research.

Aprendizagem em grupo é muito utilizada no ensino dos profissionais de saúde tanto na parte acadêmica quanto na parte clínica. Há um crescente reconhecimento de que a regulação durante aprendizagem é essencial para o indivíduo e em grupo. Os autores deste artigo propõem um modelo prático para entender, avaliar e fornecer feedback em regulação durante a aprendizagem em grupo. Esse modelo é baseado por estudos publicados em outras áreas de educação, sendo composto por três variações de regulação durante aprendizagem em grupo, a saber, individual, corregulação e regulação compartilhada. Cada variação de regulação foca em três atividades essenciais durante a aprendizagem em grupo: tarefa, social e motivacional. Cenários ilustrativos são apresentados para descrever como esse modelo pode ser utilizado em ensino em saúde. O foco específico e adicional em regulação pode melhorar práticas de feedback em aprendizagem em grupos e os autores discutem recomendações para implementações práticas assim como pesquisas futuras.

Transição do ensino presencial para o remoto em tempos de COVID-19: perspectiva docente / Transition from face-to-face education to online during COVID-19 times: teachers' perspective

Objetivo: este artigo tem como objetivo refletir, a partir do olhar de docentes dos cursos da área da saúde, sobre as estratégias adotadas para a manutenção de suas atividades em meio à pandemia do novo Coronavírus. Métodos: trata-se de um estudo descritivo do tipo relato de experiência. Resultados: tais reflexões abordam os avanços e os desafios relacionados ao desenvolvimento docente, as adaptações nas aulas teóricas, teórico-práticas e nos estágios obrigatórios supervisionados e avaliação do aluno no ensino emergencial remoto. Conclusão: a transição do ensino presencial para o remoto exigiu adaptações e flexibilidade e tais mudanças transformaram o cenário do processo de ensino e aprendizagem, apontando que a tecnologia pode ser ainda mais explorada, tendo perspectivas permanentes.

Objective: the aim of this study was to reflect, from the perspective of teachers of health courses, on the strategies adopted to maintain their activities during the new Coronavirus pandemic. Methods: this is a descriptive, experience report. Results: such reflections addressed the advances and challenges related to teacher development, adaptations in theoretical, theoretical-practical classes and in supervised mandatory internships and student assessment in remote emergency teaching. Conclusion: the transition from face-to-face to remote education required adaptations and flexibility, and these changes transformed the scenario of the teaching and learning process, pointing out that technology can be further explored, with permanent perspectives.

Relationships between Bloom's taxonomy, judges' estimation of item difficulty and psychometric properties of items from a progress test: a prospective observational study

ABSTRACT BACKGROUND: Progress tests are longitudinal assessments of students' knowledge based on successive tests. Calibration of the test difficulty is challenging, especially because of the tendency of item-writers to overestimate students' performance. The relationships between the levels of Bloom's taxonomy, the ability of test judges to predict the difficulty of test items and the real psychometric properties of test items have been insufficiently studied. OBJECTIVE: To investigate the psychometric properties of items according to their classification in Bloom's taxonomy and judges' estimates, through an adaptation of the Angoff method. DESIGN AND SETTING: Prospective observational study using secondary data from students' performance in a progress test applied to ten medical schools, mainly in the state of São Paulo, Brazil. METHODS: We compared the expected and real difficulty of items used in a progress test. The items were classified according to Bloom's taxonomy. Psychometric properties were assessed based on their taxonomy and fields of knowledge. RESULTS: There was a 54% match between the panel of experts' expectations and the real difficulty of items. Items that were expected to be easy had mean difficulty that was significantly lower than that of items that were expected to be medium (P < 0.05) or difficult (P < 0.01). Items with high-level taxonomy had higher discrimination indices than low-level items (P = 0.026). We did not find any significant differences between the fields in terms of difficulty and discrimination. CONCLUSIONS: Our study demonstrated that items with high-level taxonomy performed better in discrimination indices and that a panel of experts may develop coherent reasoning regarding the difficulty of items.

The assessment of personality traits and its association with learning communication skills / Avaliação dos traços de personalidade e sua associação com a aprendizagem de habilidades de comunicação

Aims: The aim of this study was to investigate the association between personality traits and attitudes toward learning communication skills in undergraduate medical students. The relation between students' attitudes and personality trait could help us identify those who those who will need more support to develop communication skills, based on their personality traits. Methods: The data was collected data from an intentional and cross-sectional sample composed of 204 students from three Brazilian universities. The students answered questionnaires containing the Communication Skills Attitude Scale (CSAS-BR) and the Big Five Mini-Markers (BFMM) for personality. Data were analyzed using frequency calculations, principal components analysis, and the multiple linear regression model. Results: Seven among 26 items of the original Communication Skills Attitude Scale (CSAS) presented factor loads lower than |0.30| and must be excluded in the CSAS -BR that showed one domain including positive and negative attitudes. The value of Cronbach's alpha of the 19-item scale was 0.894. The BFMM showed similar dimensional results with five domains with Cronbach's alpha values of 0.804 for Extroversion, 0.753 for agreeableness, 0.755 for conscientiousness, 0.780 for neuroticism and 0.668 for openness. There were positive and statically significant linear associations with the CSAS-BR and agreeableness (ß: 0.230, p<0.001), extraversion (ß: 0.150, p=0.030), and openness to experience (ß: 0.190, p=0.010). These personality factors drive social interactions and interpersonal relations, which involve the tendency to be friendly, flexible, and cooperative; to show a willing disposition; and the ability to actively engage with others. Conclusions: Based on the methods applied in this study, the results demonstrated a relation between agreeableness, extraversion and openness to experience with attitudes on communication skills in students from three Brazilian universities. Our results suggest that the evaluation of personality traits can contribute to the recognition of students for whom the establishment of special teaching strategies can improve communication skills.

Objetivos: Este estudo teve como objetivo determinar se se existe uma associação entre traços de personalidade e atitudes quanto à aprendizagem de habilidades de comunicação em estudantes de medicina. A relação entre as atitudes dos alunos e o traço de personalidade pode nos ajudar a identificar aqueles que necessitarão maior apoio para desenvolver habilidades de comunicação, a partir da identificação inicial do traço de personalidade. Métodos: Os dados foram coletados em uma amostra intencional em um corte transversal composta por 204 estudantes de três universidades brasileiras. Os alunos responderam a questionários contendo a Communication Skills Attitude Scale (CSAS-BR) e o Big Five Mini-Markers (BFMM) para personalidade. Os dados foram analisados usando cálculos de frequência, análise de componentes principais e o modelo de regressão linear múltipla. Resultados: Sete dos 26 itens do Communication Skills Attitude Scale (escala original - CSAS) apresentaram cargas fatoriais inferiores a |0.30|e foram excluídos no CSAS-BR, que mostrou um domínio contendo atitudes positivas e negativas. O valor do alfa de Cronbach na escala de 19 itens foi 0,894. O BFMM mostrou resultados dimensionais semelhantes com cinco domínios com valores alfa de Cronbach de 0,804 para extroversão, 0,753 para amabilidade, 0,755 para conscienciosidade, 0,780 para neuroticismo e 0,668 para abertura. Houve associações lineares positivas e estatisticamente significativas do CSAS-BR com amabilidade (ß: 0,230, p <0,001), extroversão (ß: 0,150, p = 0,030) e abertura à experiência (ß: 0,190, p = 0,010). Esses fatores de personalidade promovem interações sociais e relações interpessoais com tendência de serem amigáveis, flexíveis e cooperativas; bem como estarem disponíveis; e com capacidade de se envolver ativamente com as outras pessoas. Conclusões: Este estudo, com a metodologia empregada, mostrou que traços amabilidade, extroversão e abertura à experiência estiveram associados com habilidades de comunicação em acadêmicos de três universidades brasileiras. Os resultados sugerem que a avaliação dos traços de personalidade possa contribuir para o reconhecimento de alunos para os quais o estabelecimento de estratégias especiais de ensino possa melhorar as habilidades de comunicação.

Implementando o teste adaptativo computadorizado / Implementing computerized adaptative test

Tradicionalmente, a avaliação de conhecimento é composta por itens dos quais os alunos respondem ao mesmo tempo e os mesmos itens, como por exemplo a prova de uma disciplina. Essa avaliação pode ser considerada muito fácil ou difícil pelo aluno. Em ambos os casos, a prova será entediante e fornecerá pouca informação sobre o nível de conhecimento do aluno. Uma forma de resolver esse problema, é criar provas customizadas para cada aluno, sendo que a próxima questão será selecionada baseada no desempenho anterior do aluno. Essa forma de avaliação é conhecida por teste adaptativo computadorizado. O teste adaptativo computadorizado apresenta tanto vantagens educacionais quanto psicométricas quando comparado às provas de formato tradicional. O teste adaptativo computadorizado requer menos itens do que o teste no formato tradicional, algo que consequentemente diminuirá a fadiga dos alunos, aumentando a aprendizagem do aluno. Ademais, o teste adaptativo computadorizado é desenhado especificamente para cada aluno, considerando a dificuldade de cada item. Isso torna o teste mais atrativo e autêntico, pois os itens sempre estarão alinhados ao conhecimento do aluno. Por ser necessária a informação sobre a dificuldade do item e a habilidade do aluno, o teste adaptativo computadorizado utiliza a Teoria de Resposta ao Item, que estabelece uma relação entre a habilidade do sujeito, a dificuldade do item e a probabilidade de acertar o item, essencial para o funcionamento do teste adaptativo computadorizado. Apesar da complexidade técnica para a implementação do teste adaptativo computadorizado, o mesmo traz um maior padrão para a avaliação tanto de um ponto de vista psicométrico como do ponto de vista do alinhamento às teorias modernas de aprendizagem. Por causa de sua alta complexidade, a implementação e a utilização do teste adaptativo computadorizado geralmente estão associadas a provas de decisão de alto impacto e em grande escala. No entanto, com o novo entendimento educacional, onde se faz necessário respeitar a individualidade e o ritmo de cada aluno, o teste adaptativo computadorizado será cada vez mais utilizado.

Traditionally, the assessment of knowledge consists of items, who students answered the same items at the same time, such as test of a specific subject. This assessment may be considered too easy or difficulty by the student. In both cases, the test is likely to be boring by the students and it may provide little information on students' knowledge level. One way of solving this problem is by creating tailored tests for each student, considering that the next question will be selected based on students' performance on previous items. This type of test is known as computerized adaptative test. Computerized adaptative test provides both educational and psychometrics advantages compared to the traditional paper-pen testing. Computerized adaptative test requires less items than the traditional test, which in turns will decrease students' fatigue, and optimizing learning. Furthermore, computerized adaptative test is designed for each student, considering the level of difficulty of each item. This makes the teste more attractive and authentic, since the items will be always aligned with the level of students' knowledge. Since computerized adaptative test requires both the difficulty of the item and students' ability, it requires the use of Item Response Theory, which establish a relation between difficulty of the item, students' ability and the probability of answering a question correctly. Although the implementation of computerized adaptative test is complex, computerized adaptative test has a higher standard in both psychometric point of view and the alignment with modern theories of learning. Because of the high complexity, the implementation of computerized adaptative test is usually in high-stakes test and large scale. However, the new educational paradigm in which requires tailored-made education respecting the pace of each student, the computerized adaptative test will be more used over time.

Cumulative assessment: does it improve students' knowledge acquisition and retention? / Avaliação cumulativa: melhora a aquisição e a retenção do conhecimento pelos estudantes?

AIMS: Cumulative assessment has been used as a tool to steer students' study behavior, since it increases students' self-study time while spreading their study time more evenly throughout the span of the course. However, little is known about the impact of cumulative assessment on students' knowledge growth. Therefore, our study compared the growth of knowledge of students who attended a course with cumulative assessment with those with end-of-course assessment. We hypothesized that students in the cumulative assessment condition would have a higher increase in knowledge compared to students in the end-of-course assessment condition. METHODS: This is a follow-up study of a previous randomized experiment that compared students' performance between students who attended a course with cumulative assessment with those with end-of-course assessment. We gathered data of the first four subsequent Dutch interuniversity progress test after the experiment from 62 students. Of those, 37 students were in the end-of-course assessment condition and 25 were in the cumulative assessment condition. The questions were classified as part of the teaching block or not. To analyze students' knowledge growth, we conducted a General Linear Model. RESULTS: Our results demonstrated that there was a significant increase in students' knowledge of the four subsequent progress tests. Additionally, our general linear model showed no difference between both groups, indicating that cumulative assessment and end-of-course assessment produced similar outcomes when comparing students' knowledge growth. CONCLUSIONS: So far, little evidence has supported the use of cumulative assessment as a tool for increasing students' knowledge growth. The lack of finding a positive effect of cumulative assessment on knowledge retention may be explained by the repetitive character of our (spiral) curriculum.

OBJETIVOS: A avaliação cumulativa tem sido usada como uma ferramenta para orientar o comportamento de estudo dos alunos, uma vez que aumenta o tempo de auto aprendizado, ao mesmo tempo que distribui o tempo de estudo de forma mais uniforme ao longo do curso. No entanto, pouco se sabe sobre o impacto da avaliação cumulativa na evolução do conhecimento dos estudantes. Portanto, nosso estudo comparou o aumento do conhecimento entre estudantes que participaram de um curso com avaliação cumulativa, e aqueles que tiveram avaliação de fim de curso. Nossa hipótese é que os estudantes na condição de avaliação cumulativa teriam um aumento maior no conhecimento em comparação com os estudantes na condição de avaliação do final do curso. MÉTODOS: Este é um estudo de acompanhamento de um experimento randomizado anterior, que comparou o desempenho entre estudantes que participaram de um curso com avaliação cumulativa e aqueles com avaliação de fim de curso. Nós reunimos dados dos primeiros quatro Testes do Progresso interuniversitários holandeses subsequentes ao experimento, em 62 estudantes. Destes, 37 estavam na condição de avaliação de final de curso e 25 estavam na condição de avaliação cumulativa. As questões foram classificadas como parte do bloco de ensino ou não. Para analisar o crescimento do conhecimento dos estudantes, conduzimos um Modelo Linear Geral. RESULTADOS: Nossos resultados demonstraram que houve um aumento significativo no conhecimento dos estudantes nos quatro Testes do Progresso subsequentes. Além disso, nosso modelo linear geral não mostrou diferença entre os dois grupos, indicando que a avaliação cumulativa e a avaliação no final do curso produziram resultados semelhantes ao comparar o crescimento do conhecimento dos alunos. CONCLUSÕES: Até agora, pouca evidência apoiou o uso da avaliação cumulativa como uma ferramenta para aumentar o crescimento do conhecimento dos alunos. A falha em encontrar um efeito positivo da avaliação cumulativa na retenção de conhecimento pode ser explicada pelo caráter repetitivo do nosso currículo (em espiral).

Simulation centers and pedagogical planning: two sides of the same coin / Centros de simulação e projeto pedagógico: dois lados da mesma moeda

AIMS: This article discusses the main issues related to the use and structuring of a simulation center, namely, logistics, use of resources and alignment between the pedagogical project and simulated activities. METHODS: A narrative literature review, with search in Web of Science, PubMed, SciELO and Google Scholar databases, included articles published up to June 2017. RESULTS: Medical simulation has been implemented in the health courses for training and assessment. Because of this implantation, many simulation centers have been created, involving a high cost for the construction as well as the maintenance. Many of the simulation centers have a low acceptance from teachers and students, letting them underused, especially when the methodology is not correctly implemented. The simulation centers will become important when they are aligned with the pedagogical planning. Planning a simulation center is a timeconsuming task, which requires visiting another simulation center to avoid major adjustments afterwards. It is important to identify the target group and the usage of the simulation center on the pedagogical planning to define the number of users and the type of structure. Also, it is necessary to identify the type of simulators the simulation center will use. Faculty development and multiple disciplinary teams are required. The lack of faculty development is one of the reasons of the underuse of the simulation center. Besides faculty development, other ways of optimize the simulation center is research and partnership between medical school and hospital. Medical school will have funding opportunities and interaction with society. The hospital will qualify their employees and increase the safety of their patients. While conducting the budget, there is a need to consider all those points, since only the physical space and the simulators are not sufficient for a good simulation center. CONCLUSIONS: The integration between education, research and assistance, and the alignment with the pedagogical project are of utmost importance for the use of simulation in healthcare, and essential for the development of new training and knowledge.

OBJETIVOS: Discutir as principais questões relacionadas ao uso e estruturação de um centro de simulação: logística, aproveitamento dos recursos e alinhamento entre o projeto pedagógico e as atividades simuladas. MÉTODOS: Revisão narrativa da literatura, com busca nas bases de dados Web of Science, PubMed, SciELO e Google Scholar, incluiu artigos publicados até junho de 2017. RESULTADOS: A simulação médica tem sido inserida nos cursos da área de saúde tanto para treinamento quanto para avaliação. Com isso, houve um grande aumento de centros de simulação, os quais envolvem um alto custo tanto para sua infraestrutura geral e especificidades como para manutenção. Muitas vezes os centros de simulação têm uma baixa aceitação docente e discente, tornando-os subutilizados, principalmente quando a metodologia não é implementada adequadamente. O método será mais valorizado quando houver um alinhamento entre o projeto pedagógico e as atividades simuladas. O planejamento de um centro de simulação é uma tarefa árdua que exige estudo prévio, conhecimento sobre o currículo institucional, orçamento e visitas a outros centros já existentes para evitar grandes ajustes posteriores que potencialmente são difíceis e onerosos. Para um melhor aproveitamento logístico, é necessário inicialmente identificar o público alvo e a inserção curricular do método, para definir a quantidade de participantes, tipos de salas e tipos de simuladores. A capacitação docente e o envolvimento multiprofissional são necessários para o bom funcionamento do centro de simulação, sendo que um dos principais motivos para a sua subutilização é a falta de capacitação docente. Além de capacitar os docentes, outras formas para utilizar os centros de simulação estão relacionadas à pesquisa e à parceria entre escolas de medicina e serviços hospitalares. Nessa parceria, as instituições de ensino ganham oportunidades de financiamento e interação com a sociedade, enquanto os hospitais ganham qualificação e aumentam a segurança de seus pacientes. Todas essas questões devem ser consideradas quando o estudo orçamentário é realizado, pois apenas o ambiente físico e os simuladores não são suficientes para o aproveitamento do ambiente simulado. CONCLUSÕES: A integração entre educação, pesquisa e assistência, e o alinhamento com o projeto pedagógico, são de extrema importância para a utilização da simulação na área da saúde, e essenciais para o desenvolvimento de novos treinamentos e conhecimentos.

Importância e desafios do treinamento simulado em saúde / Importance and challenges of simulation training in healthcare

O uso da simulação no ensino em saúde amplia as oportunidades de aprendizagem, contribuindo de forma relevante para a prevenção de erros durante a atividade profissional. Entretanto, são vários os desafios para alcançar um treinamento simulado eficiente, incluindo a necessidade de adaptar o conhecimento produzido em diferentes contextos. Como deve ser organizado um centro de simulação? Como levar em conta as peculiaridades dos estudantes na aplicação do conceito de debriefing? Os instrumentos de avaliação foram validados para a população na qual estão sendo aplicados? Quais elementos devem ser incluídos no ensino baseado em simulação para melhorar a aquisição e/ou a retenção de habilidades, conhecimentos e atitudes? Em que momento do currículo introduzir cada possibilidade de treinamento simulado, de modo a tornar o investimento válido? Neste editorial, os autores assinalam a importância do treinamento simulado em saúde e a necessidade de pesquisas que objetivem entender as diferentes situações e fornecer respostas a estas questões.

The use of simulation in health education expands learning opportunities, contributing in a relevant way to the prevention of errors during professional activity. However, there are several challenges to achieving efficient simulated training, including the need to adapt the knowledge produced in different contexts. How should a simulation center be organized? How to take into account the peculiarities of the students in applying the concept of debriefing? Have the evaluation tools been validated for the population in which they are being applied? What elements should be included in simulation-based teaching to improve acquisition and/or retention of skills, knowledge, and attitudes? At what point, in the curriculum, should every possibility of simulated training be introduced in order to make the investment valid? In this editorial, the authors point out the importance of simulation training in healthcare and the need for research aimed at understanding the different situations and providing answers to these questions.

Tradução e retrotradução do instrumento de avaliação do trabalho em equipe TeamSTEPPS® para uso no ensino por simulação no Brasil / Translation and back-translation of the TeamSTEPPS® teamwork assessment tool for use in simulation teaching in Brazil

OBJETIVOS: Descrever os resultados do processo de tradução e retrotradução do questionário TeamSTEPPS® para o português brasileiro. Esse questionário norte americano tem sido utilizado mundialmente como uma ferramenta útil para o ambiente de simulação com finalidade avaliativa com o objetivo de melhorar a segurança do paciente dentro das organizações de saúde com base na efetiva comunicação e trabalho em equipe. MÉTODOS: A metodologia adotada foi a tradução e retrotradução com posterior análise semântica por docentes experientes em avaliações práticas em saúde. RESULTADOS: O instrumento traduzido demonstrou possuir formato simples e fácil leitura e compreensão ao ser analisado pelos autores, docentes e tradutores, não gerando nenhum tipo de discrepância em seus itens. Na análise posterior pelos docentes, demonstrou-se que os itens eram relevantes e claros para o uso na realidade brasileira. CONCLUSÕES: Todos os passos do processo de tradução e retrotradução foram realizados com sucesso, finalizando o instrumento de avaliação de trabalho em equipe TeamSTEPPS® em português brasileiro. O processo de tradução e consequente adaptação de qualquer instrumento é complexo e não termina na equivalência linguística. Desta forma, a segunda fase deste trabalho será a aplicação do instrumento em cenários simulados com foco no treinamento de equipes, para refazer dados de análises psicométricas no contexto educacional e análise de equivalência semântica.

AIMS: To describe the results of translation and back-translation of the TeamSTEPPS® questionnaire to Brazilian Portuguese. This North American questionnaire has been used globally as an useful tool in simulation environment with evaluation intent, aiming at improving patient safety inside health settings, based on effective communication and teamwork. METHODS: The adopted methodology consisted in translation and back-translation, with subsequent semantic analysis by experienced professors in health practice evaluations. RESULTS: The translated tool showed a simple format and easy interpretation and understanding when analyzed by authors, professors and translators, and does not generate any kind of discrepancy in their items. In the subsequent analysis by the professors, it was shown that the items were relevant and clear to the Brazilian reality. CONCLUSIONS: All the steps of the translation and back-translation process were carried out successfully, finalizing the TeamSTEPPS® teamwork assessment tool in Brazilian Portuguese. The translation process of any tool is complex, and does not end in the linguistic equivalence. Therefore, a second step of this work will be the application of this scale in simulated scenarios focused in teamwork training, to retrace data on psychometric analyses in the educational context and semantic equivalence analyses.

Vulnerabilidade ao estresse e satisfação no trabalho de funcionários públicos / Stress vulnerability and job satisfaction of public employees / Vulnerabilidad al estrés y la satisfacción laboral de los empleados públicos

Esta pesquisa teve como objetivo verificar as diferenças de médias de satisfação no trabalho em relação ao sexo, à vulnerabilidade ao estresse, à idade, à escolaridade e ao tempo de serviço. Participaram 116 sujeitos, funcionários públicos, sendo 88,8% do sexo feminino, com idades variando entre 19 a 62 anos (M=46,19, DP=10,28), com no mínimo três meses e, máximo, de 42 anos de serviço, com formação escolar do ensino fundamental até especialização. Os participantes responderam à escala de satisfação no trabalho e à escala de vulnerabilidade ao estresse no trabalho em aproximadamente 30 minutos. Os resultados mostraram diferenças significativas entre satisfação no trabalho e vulnerabilidade ao estresse e escolaridade. Em relação ao sexo, idade e tempo de serviço, não foram encontradas diferenças significativas. Os resultados são discutidos à luz da literatura

This research aims to verify possible job satisfaction differences in regards to gender, stress vulnerability, age, schooling and service time. 116 public employees answered a job satisfaction and stress vulnerability survey. From this, 88,8% were female with an age range from 19 to 62 (M=46,19, SD=10,28), working at least for 3 months with schooling from high school through to university higher education levels. Results showed differences between job satisfaction and stress vulnerability and schooling. With regards to gender, age and service time analysis demonstrate no differences. The results are discussed in light of literature

Esta investigación tuvo como objetivo determinar las diferencias en el promedio de satisfacción laboral en relación con el género, la vulnerabilidad al estrés, la edad, el nivel educativo y tiempo de servicio. Participaron 116 sujetos, 88,8% eran mujeres, con edades comprendidas entre 19 a 62 años (M = 46.19, SD = 10,28), con un mínimo de tres meses y máximo de 42 años de servicio, con la escolaridad desde Enseñanza Básica hasta especialización. Los participantes respondieron a la escala de satisfacción en el trabajo y a la escala de vulnerabilidad al estrés en el trabajo en aproximadamente 30 minutos. Los resultados mostraron diferencias significativas entre satisfacción laboral y la vulnerabilidad al estrés y la escolarización. En relación al sexo, edad y tiempo de servicio no se encontraron diferencias significativas. Los resultados se discuten a la luz de la literatura.

Avaliação da vulnerabilidade ao estresse no trabalho de operadores de Telemarketing / Work-related stress vulnerability assessment in telemarketing operators

O estresse no contexto do trabalho está associado aos danos à saúde e ao prejuízo ocasionado tanto no desempenho dos trabalhadores quanto nos resultados corporativos. O presente estudo teve como objetivo avaliar a vulnerabilidade de operadores de telemarketing aos estressores laborais. Também foram verificadas as relações com fatores sociolaborais, como sexo, idade, estado civil, escolaridade, experiência e tipo de telemarketing. O instrumento utilizado foi a Escala de Vulnerabilidade ao Estresse no Trabalho (EVENT). Participaram da pesquisa 201 operadores de telemarketing de um Call Center localizado no Estado de São Paulo. Os resultados gerais indicaram baixa suscetibilidade ao estresse laboral. Nos fatores Pressão no Trabalho, Clima e Funcionamento Organizacional e Geral os homens apresentaram médias mais elevadas do que as mulheres. Na maioria das análises, o tempo de experiência do empregado em determinada função associou-se ao aumento das médias para a vulnerabilidade ao estresse...

Stress in the workplace is associated with health problems and with detrimental effects on both employee performance and corporate results. This study aimed to assess the vulnerability of telemarketers to work-related stressors. Besides this, relationships were verified with socio-occupational factors such as gender, age, marital status, education level, experience, and type of telemarketing. The instrument used was the Scale of Vulnerability to Stress at Work (EVENT). Participants of the study were 201 telemarketers in a Call Center located in the state of São Paulo. The overall results indicated low susceptibility to occupational stress. In the factors Work Pressure, Climate, and General and Organizational Function, men presented higher averages than did women. In most of the analyses, the employee's length of experience in the position showed an association with an increase in the averages for stress vulnerability...

Análise de produções da Revista Brasileira de Orientação Profissional / Analysis of publication of Revista Brasileira de Orientação Profissional / Análisis de las producciones de la Revista Brasileira de Orientação Profissional

Investigar a produção científica de determinada área de conhecimento permite promover o desenvolvimento organizado dela. Esse estudo analisou quanti e qualitativamente as publicações da Revista Brasileira de Orientação Profissional, de 2007-2011. Foram arrolados 68 artigos, dos quais 53 empíricos e 15 teóricos. Para a análise das temáticas, houve a organização em categorias, sendo que a relação entre construtos e variáveis foi a que agregou o maior número de artigos. Os adolescentes foram os mais pesquisados. Houve grande diversidade de instrumentos utilizados nas investigações; a técnica mais utilizada foi a entrevista. Dentre as referências citadas nos artigos, foram mais mencionadas aquelas publicadas a partir de 2000, e de modo geral, as estrangeiras foram mais citadas. São discutidas implicações para pesquisas futuras.

Investigate the production of a particular area of scientific knowledge allows her to promote the development organized it. This study analyzed the publications of the Revista Brasileira de Orientação Profissional during the 2007 to 2011 period. Were analyzed 68 articles, witch 53 empirical and 15 theoretical. For analysis of the themes, there were category organizations, so that the relationship between the contextual variables and constructs was added to the largest number of articles. Besides that, the researcher focus more on teenagers, they apply different instruments, and the most used technique was the interview. Regards to reference, the articles cited that was published since 2000 and the majority was international. Besides that it were discussed implications for future research.

Investigar la producción científica de un área particular del conocimiento permite promover su desarrollo ordenado. Este estudio analizó cuantitativa y cualitativamente las publicaciones de la Revista Brasileña de Orientación Profesional, de 2007-2011. Fueron evaluados 68 artículos, de los cuales 53 empíricos y 15 teóricos. Para el análisis de las temáticas, hubo una organización en categorías, siendo que la relación entre los constructos y las variables fue la que se añadió al mayor número de artículos. Los adolescentes fueron los más estudiados. Hubo gran diversidad de instrumentos utilizados en las investigaciones; la técnica más utilizada fue la entrevista. Entre las referencias citadas en los artículos, fueron más mencionadas aquellas publicadas a partir del año 2000, y en general, los extranjeros fueron los más citados. Por fin, se discuten las implicaciones para las investigaciones futuras.

Jovens delinquentes e universitários agressivos: diferenças comportamentais / Deliquent juvenile and aggressive college student: behavioral differences / Jóvenes delincuentes y universitarios agresivos: diferencias comportamentales

Este artigo teve como objetivo verificar as diferenças de condutas agressivas entre um grupo de pessoas que cometeram delitos (grupo 1) e um grupo de universitários com as maiores pontuações na Escala de Avaliação de Tendência a Agressividade (grupo 2). O grupo 1 foi constituído por 41 jovens com idades entre 18 e 19 anos, enquanto o grupo 2 foi composto por 42 participantes universitários com idades entre 18-29 anos. Os resultados mostraram o grupo 1 caracterizou-se por condutas relacionadas a enganar para prejudicar, obter sexo ou não perceberem minha culpa; desafiar pessoas, descarregar a raiva em alguém e andar armado, enquanto o grupo 2 apresentou apenas o fato falar alto quando não atendido ou entendido.

This article aims to verify the differences in aggressive behaviors in a group of people who committed crimes (group 1) and a group of college students with the highest scores on the Escala de Avaliação de Tendência a Agressividade (group 2). Group 1 consisted of 41 18-19 years persons, while Group 2 was composed of 42 18-29 year-old participating students. The results showed that group 1 was characterized by conduct related to injury, sex, or it is not my fault; defying people, raging at someone and carrying a gun. Group 2 showed only the fact "speak loud" when misunderstood.

Este artículo tiene como objetivo verificar las diferencias de conductas agresivas entre un grupo de personas que cometieron delitos (grupo 1) y un grupo de universitarios con los más altos puntajes en la Escala de Avaliação de Tendência a Agressividade (grupo 2). El grupo fue compuesto por 41 jóvenes de edades comprendidas entre 18 y 19 años, mientras que el grupo 2 fue compuesto por 42 universitarios de edades entre 18-29 años. Los resultados mostraron que el grupo 1 se caracterizó por conductas relacionadas a engañar para perjudicar, tener sexo, o no darse cuenta de mi culpa; desafiar a la gente; descargar la ira en alguien y estar armado, mientras que el grupo 2 presentó solamente el facto de hablar alto cuando no atendidos o entendidos.